DIALOG (R) File 351:Derwent WPI 

(c) 2005 Thomson Derwent. All rts . reserv. 

014553484 

WPI Acc No: 2002-374187/200241 

XRPX Acc No: N02-292507 
Attention control method of vehicle drivers , involves displaying images 
or symbols within field of vision, where objects are located to draw 
attention 

Patent Assignee: DAIMLERCHRYSLER AG (DAIM ); HAHN S (HAHN-I) 
Inventor: HAHN S 

Number of Countries: 005 Number of Patents: 008 
Patent Family: 



Patent No 


Kind 


Date 


Applicat No 


Kind 


Date 


Week 


GB 


2363768 


A 


20020109 


GB 200113361 


A 


20010601 


200241 B 


DE 


10030813 


Al 


20020110 


DE 10030813 


A 


20000623 


200241 


FR 


2810772 


Al 


20011228 


FR 20018165 


A 


20010621 


200241 


US 


20020011925 


Al 


20020131 


US 2001886822 


A 


20010621 


200241 


JP 


2002137653 


A 


20020514 


JP 2001190346 


A 


20010622 


200247 


GB 


2363768 


B 


20020828 


GB 200113361 


A 


20010601 


200264 


DE 


10030813 


B4 


20040212 


DE 10030813 


A 


20000623 


200412 


US 


6774772 


B2 


20040810 


US 2001886822 


A 


20010621 


200453 



Priority Applications (No Type Date) 
Patent Details: 
Patent No Kind Lan Pg 
GB 2363768 A 9 
DE 10030813 Al 
FR 2810772 Al 
US 20020011925 Al 
JP 2002137653 A 4 
GB 2363768 B 
DE 10030813 B4 
US 6774772 B2 



Main IPC 
B60K-035/00 
G08B-005/00 
G08B-005/22 

B60Q-001/00 
B60K-035/00 
B60K-035/00 
G08B-005/00 
B60Q-001/00 



DE 10030813 A 20000623 



Filing Notes 



Add in patent DE 10161262 



Abstract (Basic) : GB 2363768 A 

NOVELTY - The action relevant information is displayed in form of 
images or symbols such that the display period is below a conscious and 
above on unconscious perception threshold of the driver. The images are 
displayed within field of vision of the driver, where objects are 
located to draw his/her attention. 

DETAILED DESCRIPTION - An INDEPENDENT CLAIM is also included for 
attention control device for vehicle drivers. 

USE - For controlling attention of vehicle drivers operators of 
most varied technical equipments. 

ADVANTAGE - Since the image information is symbolically super 
imposed, prior to display, over stimulation of the driver is reduced. 
The operator need not turn his/her view away from the scene to be 
monitored or is not distributed by the representation of information. 

pp; 9 DwgNo 0/0 

Title Terms: ATTENTION; CONTROL; METHOD; VEHICLE; DRIVE; DISPLAY; IMAGE; 

SYMBOL; FIELD; VISION; OBJECT; LOCATE; DRAW; ATTENTION 
Derwent Class: P81; P85; Q13; Q16; W05; X22 

International Patent Class (Main) : B60K-035/00; B60Q-001/00; G08B-005/00; 
G08B-005/22 

International Patent Class (Additional) : B60K-037/00; B60Q-009/00; 
G02B-027/01; G08B-005/36; G08G-001/16; G09G-005/00; G09G-005/22 




File Segment: EPI; EngPI 

Manual Codes (EPI/S-X) : W05-A03A; X22-E04 
9 



© BUNDESREPUBLI 
DEUTSCHLAND 




A Offenlegungssch^t 

® DE 10030 813 A 1 



DEUTSCHES 
PATENT- UND 
MARKENAMT 



® Aktenzeichen: 
@ Anmeldetag: 
© Offenlegungstag: 



100 30 813.9 
23. 6.2000 
10. 1.2002 



® Int. CI. 7 : 

G08B5/00 

G 09 G 5/00 
B 60 K 35/00 
B 60 Q 9/00 
G 02 B 27/01 



@ Anmelder: 

DaimlerChrysler AG, 70567 Stuttgart, DE 



@ Erfinder: 

Hahn, Stefan, Dipl. -Inform., 89075 Ulm, DE 

(56) Entgegenhaltungen: 



DE 


33 28 226 C2 


DE 


196 03 287 A1 


DE 


195 39 799 A1 


DE 


100 30 421 A1 


DE 


43 34 855 A1 


DE 


42 01 970 A1 


DE 


695 06174T2 


US 


54 32 509 A 



GOLDBACHER, A.: "Sicher auf Europas StraSen" In: 
Elektronik 16/1991, S. 34-41; 
NOLL, H.: "Schneller, sicherer, umweltfreund- 
licher" In: Funkschau 4/1987, S. 36-39; 
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@ Aufmerksamkeitssteuerung fur Bediener einer technischen Einrichtung 

(57) Zur Aufmerksamkeitssteuerung fur einen Bediener ei- 
ner technischen Einrichtung wird eine Anzeigevorrich- 
tung zur Anzeige von handlungsrelevanten Informatio- 
nen in Form von Bildern oder Symbolen realisiert, bei 
welcher die Dauer der Anzeige des jeweiligen Bildes oder 
Symbols unterhalb einer bewussten und oberhalb einer 
unbewussten Wahrnehmungsschwelle des Bedieners 
Itegt und bei der das jeweilige Bild oder Symbol an den 
Stellen des Sichtfeldes des Bedieners angezeigt wird, an 
welchem sich Objekte befinden auf welche diese auf- 
merksam gemacht werden sollen. Der Vorteil der Erfin- 
dung besteht darin, dafc der Bediener seinen Blick nicht 
von der beobachtenden Szene abwenden muss und er 
nicht unnotig durch Informationsdarstellung gestortwird. 



Besct^Hng 
^^^^ 

[0001] Die Erfindung betrifft ein Verfahren und eine zur 
Durchfuhrung des Verfahrens geeignete Vorrichtung gemafi 
den Merkmalen der Oberbegriffe der Anspriiche 1 und 14. 5 
[0002] Zur Steigerung von Sicherheit und Bedienkomfort 
kommen mittlerweile bei technischen Einrichtungen immer 
mehr die Umgebung uberwachende Sensoren zum Einsatz. 
Durch die rasante Entwicklung in der Prozessortechnik und 
bei der Miniaturisierung von integrierten Bauteilen sind 10 
mittlerweile auch Kameras zu ersch wing lichen Kosten ver- 
fiigbar. 

[0003] A us diesen Grunden finden auch in Kraftfahrzeu- 
gen zunehmend Kamerasysteme Verwendung. In jiingster 
Zeit wird gezielt daran gearbeitet Bildsensoren, die bei 15 
Nacht empfindlicher sind als das rnenschliche Auge zur 
Sichtverbesserung fur den Fahrzeugfuhrer einzusetzen. Die 
Schrift EP 0 686 865 zeigt ein Nachtsichtsystem, welches 
im Fern-Infrarot-Bereich arbeitet. Hierbei wird das vom Sy- 
stem generierte Bild in den unteren Teil der Windschutz- 20 
scheibe gespiegelt. In anderen Versuchen wurden die Bild- 
daten von Nah-Infrarot-Systemen iiber ein Head-up Display 
auf einer ebenen Scheibe vor der Windschutzscheibe abge- 
bildet. Nachteilig wirkt sich bei diesen Systemen jedoch 
aus, daB zum einen der Fahrzeugfuhrer zur Beobachtung der 25 
zusatzlichen Bildinformation seinen Blick von der eigendi- 
chen StraBenszene teilweise abwenden muB und zum ande- 
ren, daB die eingespiegelte Szene die StraBenszene teilweise 
abdeckt. Auch hat sich gezeigt, daB es schwierig ist, diese 
zusatzliche Bildinformation des Infrarot-Sy stems dem Fan- 30 
rer nahezubringen, da sie nicht seinem gewohnheitsmaBigen 
Empfindungsschatz entspricht. 

[0004] Um diese Nachteile zu umgehen wurde vorge- 
schlagen dem Fahrer keine zusatzliche bildiiche Darstellung 
der Umgebung anzubieten, sondern unterhalb der hervorzu- 35 
hebenden Objekte innerhalb einer StraBenszene eine LED- 
Zeile einzublenden. Eine solche Einblendung weist jedoch 
I<onstrastprobleme auf und ist durch die standig Prasenz 
von Zusatzinformation innerhalb der Hauptblickrichtung 
auBerst storend. 40 
.[0005] Untersuchungen in.dcr Wahmehmungsphysiologie 
zeigen, daB die Aufmerksamkeit des Menschen durch kurze, 
kaum wahrnehmbare Kontrastanderungen gelenkt werden 
kann. Aus der Schrift DE 199 52 506 ist ein System be- 
kannt, bei welchem einem Bediener einer technischen Ein- 45 
richtung kurzzeitig, unterhalb einer bewuBten aber oberhalb 
einer unbewuBten Wahmehmungsschwelle, handlungsrele- 
vante Information mittels einer Einheit zu deren Anzeige 
angeboten wird. Auf diese Weise kann die Aufmerksamkeit 
des Bedieners ausgelost werden, ohne daB dieser durch die 50 
standige Darstellung unnotiger Information uberfordert 
wird. 

[0006] Aufgabe der Erfindung ist es ein Verfahren und ein 
zur Durchfuhrung dieses Verfahrens geeignete Vorrichtung 
zur Aufmerksamkeitssteuerung eines Bediener einer techni- 55 
schen Einrichtung zu finden. 

[0007] Die Aufgabe wird durch ein Verfahren, gemaB den 
Merkmalen des Anspruchs 1 gelost. Eine Durchfuhrung die- 
ses Verfahrens geeignete Vorrichtung wird mittels der Merk- 
male des Anspruchs 14 gelost. 60 
[0008] Dabei wird durch eine Anzeigevorrichtung zur An- 
zeige von handlungsrelevanten Informationen in Form von 
Bildern oder Symbolen gelost, bei welcher die Dauer der 
Anzeige des jeweiligen Bildes oder Symbols unterhalb einer 
bewussten und oberhalb einer unbewussten Wahmehmungs- 65 
schwelle des Bedieners liegt und bei der das jeweilige Bild 
oder Symbol an den Stellen des Sichtfeldes des Bedieners 
angezeigt wird, an welchen sich Objekte befindet auf welche 
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dieser aufmerksam gefflcht werden soli. 
[0009] Der Vorteil der Erfindung besteht darin, daB der 
Bediener seinen Blick nicht von der zu beobachtenden 
Szene abwenden muB und er nicht unnotig durch Informati- 
onsdarstellung gestort wird. 

[0010] Vorteilhafte Ausgestaltungen und Weiterbildungen 
der Erfindung sind in den Unteranspruchen beschrieben. 
[0011] Die Erfindung eignetet sich fur die Aufmerksam- 
keitssteuerung von Bedienern unterschiedlichster techni- 
scher Einrichtungen, bei welchem Personen die Betriebsum- 
gebung zu beobachten und auf auftretende Anderungen zu 
reagieren haben. 

[0012] Nachfolgend wird die Erfindung im Rahmen ihres 
Einsatzes zur Aufmerksamkeitssteuerung von Fahrzeugfuh- 
rem beispielhaft erlautert. Besonders vorteilhaft ist der Ein- 
satz des erfindungsgemaBen Verfahrens hierbei innerhalb ei- 
nes Systems zur Verbesserung der Nachtsicht. Hierbei wer- 
den die Objekte, auf welche aufmerksam gemacht werden 
soil, zumindest in Teilen durch die Auswertung von Infra- 
rot-Sensordaten gewonnen. So kann der Fahrer auf FuBgan- 
ger, welche auf diese Weise auch bei Dunkelheit erkannt 
werden, aufmerksam gemacht werden, noch bevor deren 
Gefahrdung sicher festgestellt werden kann. Um einen Fahr- 
zeugfuhrer nicht mit Informationen zu uberlasten sollte die- 
ser bewuBt nur bei Gefahrensituationen deutlich gewarnt 
werden. Diese deutliche Warnung kann durch das System 
beispielhaft dadurch veranlaBt werden, daB die Darstel- 
lungsdauer der Bilder oder Symbole oberhalb der bewuBten 
Wahmehmungsschwelle liegt. Auf diese Weise ist es auch 
denkbar durch einfache Variation in der Dauer der Anzeige 
dem Fahrer unterschiedliche Gefahrdungspotentiale zu ver- 
mitteln. 

[0013] In vorteilhafter Weise wir die handlungsrelevante 
Information in Form von Lichtflecken, die im Sichtfeld des 
Fahrers den Abbildungen der tatsachlichen Objekte uberla- 
gert sind angezeigt. Dabei ist es auch denkbar die Licht- 
flecke, entsprechend dem jeweiligen Gefahrdungspotential 
einzufarben oder mit entsprechenden Texturen zu versehen. 
In einer weiteren vorteilhaften Ausgestaltung wird die hand- 
lungsrelevante Information in. Form von Pfeilen oder son- 
stige Zeigersymbolen, welche auf diejenigen Objekte ver- 
weisen, auf welche ein Bediener aufmerksam gemacht wer- 
den soil, angezeigt. Sehr wohl ist es auch gewinnbringend in 
Form von Umrandungen oder Unterstreichungen wichtige 
Objekte hervorzuheben. In erfinderischer Weise konnen 
aber auch handlungsrelevante Information in Form von 
Bildausschnitten dargestellt werden. Diese Bildausschnitte 
konnen direkt von den durch die bildgebende Sensorik ge- 
wonnene Bildinformation abstammen, wobei hierbei die ge- 
samte Bildinformation oder auch nur Konturen zur Verwen- 
dung kommen konnen. Es ist aber auch denkbar vor der Dar- 
stellung die Bildinformation symbolhaft zu Uberlagern, so 
daB beispielsweise bei der Entdeckung eines FuBgangers 
immer das selbe Symbol dargestellt wird. Dies wurde helfen 
die Reiziiberflutung des Fahrzeugfuhrers weiter zu verrin- 
gern. 

[0014] Um die Darstellung der handlungsrelevanten Bild- 
information moglichst gut in Deckung mit der Sicht des 
Umfeldes durch den Fahrzeugfuhrer zu bringen, ist es vor- 
stellbar einen zusatzlichen Verarbeitungsaufwand und not- 
wendige Sensorik dadurch zu vermeiden, daB beispiels- 
weise von einer standardisierten Sitzposition und Korper- 
groBe einer Person ausgegangen wird. Das erfindungsge- 
maBe Verfahren laBt sich jedoch gewinnbringend ausgestal- 
ten, wenn mittels einer Vorrichtung der im Sichtfeld eines 
Bedieners befindliche Umgebungsbereich bestimmt wird 
und rnit dem Sichtfeld der im Rahmen der Aufmerksam- 
keitssteuerung eingesetzten Sensor- Vorrichtung verglichen 



wird. Auf Grundlage dieses ^^Kchs kann sodann die Po- 
sition bestimmt werden, an weiSier dem Bediener die hand- 
lungsrelevante Information dargestellt werden soli. Zur 
Durchfuhrung eines solchen Verfahrensschrittes ist in idea- 
ler Weise der im Sichtfeld eines Bedieners befindliche Urn- 5 
gebungsbereich in Kenntnis der invariablen Geometrien und 
der aktuellen Position von variabel gestaltbaren Geometrien 
innerhalb des den Bediener umgebenden Raums zu bestim- 
men. Hierzu kann beispiels weise innerhalb eines Kraftfahr- 
zeugs zur Ermittlung der variabel gestaltbaren Geometrien 10 
die aktuelle Sitzposition und/oder die Einstellung der Spie- 
gelverstellung ermittelt werden. Es ist aber genauso denkbar 
mittels eines Sensors zur Bestimmung der Kopfposition 
und/oder der Augenausrichtung des Bedieners der im Sicht- 
feld eines Bedieners befindliche Umgebungsbereich be- 15 
stimmt wird. 

[0015] Entsprechend den erlauterten Verfahrensschritten, 
sollte eine Vorrichtung zur Durchfuhrung des erfindungsge- 
maBen Verfahrens zumindest aus Sensoren zur Erfassung 
von zumindest einem Teilbereich des einen Bediener einer 20 
technischen Anlage umgebenden Bereichs, aus einer Daten- 
verarbeitungsanlage und aus einer Anzeigeeinheit zur An- 
zeige von handlungsrelevanten Informationen bestehen. In 
einer vorteilhaften Ausgestaltung sollte die Vorrichtung des 
Weiteren eine Einheit enthalten, welche sich zur Ermittlung 25 
von variabel gestaltbaren Geometrien innerhalb des den Be- 
diener umgebenden Raums und/oder zur Ermittlung der 
Kopfposition und/oder der Augenausrichtung des Bedieners 
eignet. 

[0016] In vorteilhafterweise enthalt die Datenverarbei- 30 
tungsanlage eine Speichereinheit, in welcher zumindest Da- 
ten beziighch der invariablen Geometrien des den Bediener 
umgebenden Raums gespeichert sind. 
[0017] Als Anzeige Einheit innerhalb der erfindungsge- 
mafien Vorrichtung eignet sich in besondere Weise ein 35 
Head-up Display, mittels dessen einem Bediener die hand- 
lungsrelevante Information ins Blickfeld gespiegelt wird. 
Dabei ist es denkbar das Head-up Display in einfacher 
Weise in Form einer LED-Zeile auszufuhren, um reine Lini- 
eninformation (beispielsweise ,Unterstreichungen') in das 40 
Sichtfeld eines Bedieners einzuspiegeln. 

Patentanspriiche 

1. Verfahren zur Auf merksamkeitssteuerung eines Be- 45 
diener einer technischen Einrichtung, mit einer Anzei- 
gevorrichtung zur Anzeige von handlungsrelevanten 
Informationen in Form von Bildern oder Symbolen, 
wobei die Dauer der Anzeige des jeweiligen Bildes 
oder Symbols unterhalb einer bewussten und oberhalb 50 
einer unbewussten Wahrnehmungsschwelle des Bedie- 
ners liegt, dadurch gekennzeichnet, daB das jeweilige 
Bild oder Symbol an den Stellen des Sichtfeldes des 
Bedieners angezeigt wird, an welchen sich Objekte be- 
findet auf welche dieser aufmerksam gemacht werden 55 
soli. 

2. Verfahren nach Anspruch 1, dadurch gekennzeich- 
net, daB die Objekte, auf welche aufmerksam gemacht 
werden soil, zumindest in Teilen durch die Auswertung 
von Infrarot-Sensordaten gewonnen wird. 60 

3. Verfahren nach einem der Anspriiche 1 oder 2, da- 
durch gekennzeichnet, daB die Dauer der Anzeige der 
handlungsrelevanten Informationen variiert werden 
kann. 

4. Verfahren nach Anspruch 3, dadurch gekennzeich- 65 
net, daB die Dauer der Anzeige proportional mit dem 
Anstieg einer potentiellen Gefahrdung ansteigt. 

5. Verfahren nach Anspruch 4, dadurch gekennzeich- 
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net, daB ab eine^JFoestimmten Gefahrdungspotential 
die handlungsrelevanten Informationen fur eine Dauer 
angezeigt werden, welche oberhalb einer bewuBten 
Wahrnehmungsschwelle liegen. 

6. Verfahren nach einem der Anspriiche 1 oder 5, da- 
durch gekennzeichnet, daB die handlungsrelevante In- 
formation in Form von Lichtflecken angezeigt werden. 

7. Verfahren nach einem der Anspriiche 1 bis 6, da- 
durch gekennzeichnet, daB die handlungsrelevante In- 
formation in Form von Pfeilen oder sonstige Zeiger- 
symbolen angezeigt werden, welche auf diejenigen 
Objekte verweisen, auf welche ein Bediener aufmerk- 
sam gemacht werden soli. 

8. Verfahren nach einem der Anspriiche 1 oder 7, da- 
durch gekennzeichnet, daB die handlungsrelevante In- 
formation in Form von Umrandungen oder Unterstrei- 
chungen angezeigt werden, welche um bzw. unter den- 
jenigen Objekten angezeigt werden, auf welche ein Be- 
diener aufmerksam gemacht werden soil. 

9. Verfahren nach einem der Anspriiche 1 oder 8, da- 
durch gekennzeichnet, daB die handlungsrelevante In- 
formation in Form von Bildausschnitten dargestellt 
werden, welche durch bildgebende Sensorik gewon- 
nene Bildinformation uber diejenigen Objekte enthal- 
ten, auf welche ein Bediener aufmerksam gemacht 
werden soil. 

10. Verfahren nach einem der Anspriiche 1 oder 9, da- 
durch gekennzeichnet, daB mittels einer Vorrichtung 
der im Sichtfeld eines Bedieners befindliche Umge- 
bungsbereich bestimmt wird und mit dem Sichtfeld der 
im Rahmen der Aufmerksamkeitssteuerung eingesetz- 
ten Sensor Vorrichtung verglichen wird, und daB auf 
Grundlage dieses Vergleichs die Position bestimmt 
wird, an welcher dem Bediener die handlungsrelevante 
Information dargestellt werden soli. 

11. Verfahren nach Anspruch 10, dadurch gekenn- 
zeichnet, daB der im Sichtfeld eines Bedieners befindli- 
che Umgebungsbereich in Kenntnis der invariablen 
Geometrien und der aktuellen Position von variabel ge- 
staltbaren Geometrien innerhalb des den Bediener um- 
gebenden Raums bestimmt werden. 

12. Verfahren nach Anspruch 11, dadurch gekenn- 
zeichnet, daB innerhalb eines Kraftfahrzeugs zur Er- 
mittlung der variabel gestaltbaren Geometrien die aktu- 
elle Sitzposition und/oder die Einstellung der Spiegei- 
verstellung ermittelt werden. 

13. Verfahren nach einem der Anspriiche 10 oder 12, 
dadurch gekennzeichnet, daB mittels eines Sensors zur 
Bestimmung der Kopfposition und/oder der Augenaus- 
richtung des Bedieners der im Sichtfeld eines Bedie- 
ners befindliche Umgebungsbereich bestimmt wird. 

14. Vorrichtung zur Durchfuhrung des Verfahrens 
nach einem der Anspriiche 1 bis 13, dadurch gekenn- 
zeichnet, 

daB die Vorrichtung zumindest 

aus Sensoren zur Erfassung von zumindest einem Teil- 
bereich des einen Bediener einer technischen Anlage 
umgebenden Bereichs, 
aus einer Datenverarbeitungs anlage, 
und aus einer Anzeigeeinheit zur Anzeige von hand- 
lungsrelevanten Informationen, besteht. 

15. Vorrichtung nach Anspruch 14, dadurch gekenn- 
zeichnet, daB die Vorrichtung zusatzlich eine Einheit 
enthalt, welche sich zur Ermitdung von variabel ge- 
staltbaren Geometrien innerhalb des den Bediener um- 
gebenden Raums und/oder zur Ermittlung der Kopfpo- 
sition und/oder der Augenausrichtung des Bedieners 
eignet. 
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16. Vorrichtung nach 




ler Anspriiche 14 bis 15, 



dadurch gekenrfzeichnet, dab zumindest einer der Sen- 
soren zur Erfassung von* zumindest einem Teilbereich 
des einen Bediener umgebenden Bereichs ein Nachts- 



17. Vorrichtung nach einem der Anspriiche 14 bis 16, 
dadurch gekennzeichnet, daB die Datenverarbeitungs- 
anlage eine Speichereinheit enthalt in, in welcher zu- 
mindest Daten bezuglich der invariablen Geometrien 
des den Bediener umgebenden Raums gespeichert to 
sind. 

18. Vorrichtung nach einem der Anspriiche 14 bis 17, 
dadurch gekennzeichnet, daB die Anzeigeeinheit ein 
Head-up Display ist. 

19. Vorrichtung nach Anspruch 18, dadurch gekenn- 15 
zeichnet, daB das Head-up Display als LED-Zeile, die 

in das Sichtfeld des Bedieners gespiegelt werden kann, 
ausgefuhrt ist. 



ichtsystem ist. 
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